Python--Redis实战：第四章：数据安全与性能保障：第3节：AOF持久化

上一篇文章：Python--Redis实战：第四章：数据安全与性能保障：第2节：快照持久化
下一篇文章：Python--Redis实战：第四章：数据安全与性能保障：第4节：复制

AOF持久化

简单来说，AOF持久化会将被执行的命令写到AOF文件的末尾，以此来记录数据发送的变化。因此，Redis只要从头到尾重新执行一次AOF文件包含的所有写命令，就可以恢复AOF文件所记录的数据集。AOF持久化可以通过设置代码appendonly yes配置选项来打开。

文件同步：在向硬盘写入文件时，至少会发生三件事情，当调用file.write()方法（或其它编程语言里面的类似操作）对文件进行写入时，写入的内容首先会被存储到缓冲区，然后操作系统会在将来的某个时候将缓冲区存储的内容写入硬盘，而数据只有在被写入硬盘后，才算是真正地保存到了硬盘里面。用户可以通过调用file.flush()方法来请求操作系统尽快地将缓冲区存储的数据写入硬盘里面，但具体地执行写入操作仍然由系统决定。除此之外，用户还可以命令操作系统将文件同步(sync)到硬盘，同步操作会一直阻塞直到指定的文件被写入硬盘为止。当同步操作执行完毕之后，即使系统出现故障也不会对被同步的文件造成任何影响。

下表展示了appendfsync 配置选项对AOF文件的同步频率的影响。

选项	同步频率
always	每个Redis写命令都要同步写入硬盘。这样做会严重降低Redis的速度。
everysec	每秒执行一次同步，显示地将多个写命令同步到硬盘。
no	让操作系统来决定应该何时进行同步。

如果用户使用appendfsync always 选项的话，那么每个Redis写命令都会被写入硬盘，从而将发生系统崩溃时出现的数据丢失减到最少。不过遗憾的是，因为这种同步策略需要对硬盘进行大量写入，所以Redis处理命令的速度会受到硬盘性能的限制：转盘式硬盘（spinning disk）在这种同步频率下每秒只能处理大约200个写命令，而固态硬盘(solid-state drive,SSD)每秒大概也只能处理几万个写命令。

警告：固态硬盘和appendfsync always

使用固态硬盘的用户请谨慎使用appendfsync always选项，因为这个选项让Redis每次只写入一个命令，而不是像其他appendfsync选项那样一次写入多个命令，这种不断地写入少量数据的做法有可能会引发严重的写入放大（write amplification）问题，在某些环境下甚至会将固态硬盘的寿命从原来的几年降低为几个月。

为了兼顾数据安全和写入性能，用户可以考虑使用appendfsync everysec选项，让Redis以每秒一次的频率对AOF文件进行同步。Redis每秒同步一次AOF文件时的性能和不使用任何持久化特性时的性能相差无几，而通过每秒同步一次AOF文件，Redis可以保证，即使出现系统崩溃，用户也最多只会丢失一秒之内产生的数据。当硬盘忙于执行写入操作的时候，Redis还会优雅地放慢自己的速度以便适应硬盘的最大写入速度。

最后，如果用户使用appendfsync no选项，那么Redis将不对AOF文件执行任何显示的同步操作，而是由操作系统来决定应该在何时对AOF文件进行同步。这个选项在一般情况下不会对Redis的性能带来影响，但系统崩溃将导致使用这种选项的Redis服务器丢失不定数量的数据。另外，如果用户的硬盘处理写入操作的速度不够快的话，那么当缓冲区被等待写入磁盘的数据填满时，Redis的写入操作将被阻塞，并导致Redis处理命令请求的速度变慢。因为这个原因，一般来说并不推荐使用appendfsync no选项，在这里介绍了它只是为了完整列举appendfsync选项的可用的3个值。

虽然AOF持久化非常灵活地提供了多种不同的选项来满足不同应用程序对数据安全的不同要求，但AOF持久化也有缺陷：那就是AOF文件的体积大小。

重写、压缩AOF文件

AOF持久化既可以将丢失数据的时间区间降低至1秒（甚至不丢失任何数据），又可以在极端的时间内完成定期的持久化操作，那么我们有什么理由不使用AOF持久化呢？但是这个问题实际上并没有那么简单，因为Redis会不断地将被执行的写命令记录到AOF文件里面，所有随着Redis不断运行，AOF文件的体积会不断增长，在极端情况下，体积不断增大的AOF文件甚至可能会用完磁盘的所有可用空间。还有另一个问题是，因为Redis在重启之后需要通过重新执行AOF文件记录的所有写命令的还原数据集，所以如果AOF文件的体积非常大，那么还原操作执行的时间就可能会非诚长。

为了解决AOF文件体积不断增大的问题，用户可以向Redis发送bgrewriteaof命令，这个命令会通过移除AOF文件中的冗余命令来重写（rewrite）AOF文件，使AOF文件的体积变得尽可能地小。bgrewriteaof的工作原理和bgsave创建快照的工作原因非常相似：Redis会创建一个子进程，然后由子进程负责对AOF文件进行重写。因为AOF文件重写也需要用到子进程，所以快照持久化因为创建子进程而导致的性能问题和内存占用问题，在AOF持久化中也同样存在。更糟糕的是，如果不加以控制的话，AOF文件的体积可能会比快照的体积大好几倍，在进行AOF重写并删除旧AOF文件的时候，删除一个体积达到数十GB大的旧AOF文件可能会导致操作系统挂起数秒。

跟快照持久化可以通过设置save选项来自动执行bgsave一样，AOF持久化也可以通过设置auto-aof-rewrite-percentage选项和auto-aof-rewrite-min-size选项来自动执行bgrewriteaof。举个例子，假设用户对Redis设置了配置选项auto-aof-rewrite-percentage 100和auto-aof-rewrite-min-size 64mb，并且启用了AOF持久化，那么当AOF文件的体积大于64MB，并且AOF文件的体积比上一次重写之后的体积大了至少一倍（100%）的时候，Redis将执行bgrewriteaof命令。如果aof重写执行得过于频繁地话，那么用户可以考虑将auto-aof-rewrite-percentage选项的值设置为100以上，这种做法可以让Redis在AOF文件的体积变得更大之后才执行重写操作，不过也会让Redis在启动时还原数据集所需的时间变得更长。

无论是使用AOF持久化还是快照持久化，将数据持久化到硬盘上都是非常有必要的，但除了进行持续化之外，用户还必须对持久化所得的文件进行备份（最好是备份到不同的地方），这样才能尽量避免数据丢失事故发生。如果条件允许的话，最好能够将快照文件和最新重写的AOF文件备份到不同的服务器上面。

通过使用AOF持久化或者快照持久化，用户可以在系统重启或者崩溃的情况下仍让保留数据。随着负载量的上升、或者数据的完整性变得越来越重要时，用户可能需要使用复制性。

上一篇文章：Python--Redis实战：第四章：数据安全与性能保障：第2节：快照持久化
下一篇文章：Python--Redis实战：第四章：数据安全与性能保障：第4节：复制